Google Optimize 解釈
テストが開始されてから 2 週間は待ちます
2 週間あれば、平日と週末のほか、週に 1 回は起こりそうなその他のイベントも含めてバランスの取れたデータを集めることができます。
"オプティマイズのセッション ベースのアプローチ"は、さまざまな選択肢やトレードオフの間でうまくバランスを取ることを目指しています
煙に巻かれた感じある。
テストの結果を判定するタイミングはどのように決めていますか?
現在は、"最も高いコンバージョン率を 1% 以上改善できる見込み"がないと判断した時点で、テストの結果を判定しています。
2週間は見て、1%は改善できそうなテストアイデアを設定する必要がある。
分析プロセスを順序立てて説明してもらえませんか?
MCMC使う、事後分布上で、5%, 95%, 50%での数値がレポート上に出てくる。probability to be best, model improvement(lift) オプティマイズ分析では、推定コンバージョン率(「推定目標値」)と推定改善率という 2 つの項目について、信用区間が示されます